Diffusion LLMs as Targets and Adversaries: Mechanistic Safety Exploits
扩散大模型的安全机理漏洞:作为目标与攻击者
🧭 扩散LLM安全机理与攻击
Delft University of Technology · University of Neuchâtel
发现扩散LLM安全对齐稀疏且可迁移,提出SN-Guided Diffusion黑盒越狱框架,以极低成本实现高转移攻击成功率
📌 工作参考价值(4 点)
- 论文揭示的安全神经元稀疏性和跨架构可迁移性,可用于生成式推荐模型(如采用扩散LLM)的安全审计,识别并加固关键安全单元。
- SN-Guided Diffusion 框架的黑盒、离线、低生成成本特性(仅需20次生成/提示),可借鉴其对电商推荐或Agent的安全性快速评估,无需访问模型内部即可检测越狱风险。
- 安全神经元剪枝方法表明,少量神经元控制安全行为,可触发针对性的模型对齐测试,在推荐系统上线前作为红队测试手段。
- 整体上虽然偏学术安全研究,但攻击思路可迁移:对扩散生成过程的引导损失设计,可能启发在可控文本生成(如广告文案)中绕过内容策略的攻防演练。